CaIRec: Calibrated Modality Imputation for Incomplete Multimodal Recommendation
校准模态补全的不完整多模态推荐方法
🧭 多模态推荐 · 模态补全校准
Southern University of Science and Technology · National University of Singapore · Singapore Management University
通过两阶段校准框架解决模态缺失导致的跨模态结构失真与偏好适应差距,提升多模态推荐鲁棒性
📌 工作参考价值(4 点)
- 模态补全时引入跨模态结构一致性约束,避免补全后多模态特征割裂,可通过对比损失或结构保持正则实现。
- 偏好导向表征校准:构造伪缺失样本,将补全表征与经排序监督训练好的完整模态表征对齐,使补全特征直接适配推荐排序任务。
- 构建补全感知的物品关系图,同时融合补全后的多模态内容相似性与用户行为协同信号,提升图推荐模型在模态缺失场景下的表现。
- 两阶段设计:先做与推荐任务无关的结构校准,再做偏好微调,方便工程上逐步开发和部署,降低在线开销。